Unsupervised Multimodal Intent Discovery via MLLM-Guided Concept Generation and Semantic Propagation
基于MLLM概念生成与语义传播的无监督多模态意图发现
🧭 多模态意图发现 · MLLM语义引导
The Chinese University of Hong Kong, Shenzhen · Tsinghua University
用MLLM生成高层语义概念并通过图传播产生伪标签，实现可解释的无监督多模态意图聚类。
📌 工作参考价值（4 点）
- 电商对话/客服场景下，可利用 MLLM 对比邻近簇生成可解释的意图标签（如“退货咨询”、“物流查询”），替代人工标注，适用于无监督意图发现冷启动。
- 语义加权图传播策略可迁移到用户意图或 item 聚类的伪标签细化，结合局部结构一致性提升聚类质量。
- 代表样本选择 + 对比推理的思路可用于构建主动学习或弱监督样本筛选，优先标注信息量大的对话。
- 若有用户点击/浏览等多模态行为数据，可借鉴多模态融合与概念语义传播，实现可解释的用户意图聚类。